Cha ông, Jules de Polignac (1780-1847) giữ chức thủ tướng dưới Charles X cho tới khi triều Bourbon bị lật đổ trong cuộc cách mạng tháng bảy năm 1830. Alphonse được sinh tại Luân Đôn trong thời gian bố của ông vẫn còn đang làm thủ tướng cho Anh. Trong 1849, ông nhập học trường Polytechnique và sau đó làm sĩ quan bắn pháo trong chiến tranh Krym, cuối cùng lên chức đội trưởng.

Ngoài ra, ông còn là lịch sử gia, nhà thơ, nhạc sĩ, và là người dịch bản kịch Faust của Goethe.[1]

Các công trình toán học của ông chủ yếu nằm trong lý thuyết số và ông chủ yếu làm việt với các số nguyên tố.